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Исследовано влияние возможных дефектов скрытого слоя искусственной нейронной сети прямого распро- 
странения на её работоспособность. Предложены критерии для оценки правильного функционирования сети 
при распознавании образов. 
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Введение. Интерес к развитию искусственных нейронных сетей (ИНС) обусловлен в значитель- 
ной степени их схожестью по организационной структуре с мозгом человека и возможностью 
обучения. Несмотря на то, что ИНС находятся еще в стадии развития, они уже используются в 
широком спектре реальных приложений, таких как распознавание образов, аппроксимация функ- 
ций, автоматическое управление и оптимизация, благодаря способности их к моделированию не- 
линейных процессов, обобщению, работе с зашумленными данными, абстрагированию [1, 2]. 

Перспективными направлениями практического применения нейросетевых систем может 
быть обработка изображений, получаемых в космических системах дистанционного зондирования 
земли и мониторинга космического пространства [3], медицинская диагностика, системы визуаль- 
ного наблюдения. 

Из наиболее широко используемых нейронных сетей для решения задач обработки изо- 
бражений можно считать многослойные нейронные сети прямого распространения с алгоритмом 
обучения обратного распространения ошибки ВР (БаскргорадаЧоп) [3]. 

Целью данной статьи является экспериментальное исследование влияния различных клас- 
сов отказов на работоспособность многослойной нейронной сети прямого распространения. 
Экспериментальные исследования. Для исследования влияния дефектов на работу нейрон- 
ной сети была выбрана двухслойная искусственная нейронная сеть прямого распространения, 
предназначенная для решения задачи распознавания цифр от 0 до 9. 

Подаваемые на вход изображения имеют размерность 16х16 пикселей и, таким образом, 
каждая цифра представляет собой входной вектор из 256 элементов, состоящий из набора нулей 
и единиц, представляющего двоичный образ данной цифры. Задача распознавания состоит в 
принятии решения о принадлежности подаваемого на входы ИНС образа к одному из известных 
классов, поэтому выходной вектор содержит 10 элементов. Сеть обучается так, чтобы сформиро- 
вать единицу в одном из выходных нейронов, позиция которого соответствует номеру символа, и 
заполнить остальную часть выходов нулями. 

В обоих слоях сети используются сигмоидальные функции активации, которые позволяют 
усиливать слабые сигналы и не насыщаться от сильных сигналов. Скрытый слой имеет 16 нейро- 
нов. Моделирование производится средствами библиотеки ММТоо[5 среды МаЧаБ. Структурные 
схемы нейронной сети представлены на рис. 1 и 2. 
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Рис. 1. Структурная схема нейронной сети 
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Рис. 2. Общая схема искусственной нейронной сети 


При исследовании нейронной сети будем считать, что изменения величин вероятности по- 
явления правильного значения на выходе системы и среднее значение ошибочных классификаций 
при решении задачи распознавания образов, с определенной степенью достаточности, характе- 
ризуют влияние возникающих в сети дефектов нейронов на ее выходные значения. 

Для оценки вероятности появления правильного значения на выходе системы используем 
выражение [4]: 
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М» 100% 
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где «, - вероятность отнесения подаваемого на вход объекта к одному из классов ©, ..., О; 
М№лр — количество правильных ответов; // — общее число испытаний над объектами класса ‹2, 
Среднее значение ошибочных классификаций на всей выборке представим в виде: 
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где М — объем входной выборки; Т — число векторов цели; № — число выходных векторов; 
$№М — номер выходного вектора; $7 - номер целевого вектора; 7 — номер выхода сети; 
1 - длина выходного вектора; < °7 — желаемый набор значений сигналов на выходах сети; 
25" — получаемый набор значений сигналов на выходах сети. 

Формула (2) в неявной форме просматривается в [5] при анализе примеров использования 
программных средств МаНаБ, связанных с оценкой эффективности функционирования ИНС при 
работе с зашумленными данными. 

В искусственных нейронных сетях, как и в любых дискретных системах, отказы принято 
классифицировать на катастрофические, сводящиеся к логическим неисправностям типа соп$(=0 
и соп${(=1 на входах и выходах нейронов, а также на параметрические отказы, наступающие из-за 
постепенного изменения весовых коэффициентов входов и порогов чувствительности под воздей- 
ствием внешних факторов [6]. 

В данной работе исследуется влияние отказавших нейронов скрытого слоя на выходные 
значения сети в силу того, что отказы нейронов выходного слоя проще обнаружить и оценить. 

Последовательно моделируя увеличение отказов типа «0», типа «1» и случайные сочета- 
ния обоих видов отказов на выходе нейронов скрытого слоя, можно по выделенным выше показа- 
телям (1), (2) получить общую тенденцию зависимости вероятности правильного распознавания 
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(рис. 3, для формулы (1)) и процентного отношения средних значений ошибочных классификаций 
(рис. 4, для формулы (2)). 
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Рис. 3. Зависимость вероятности правильного распознавания 
от числа отказов в скрытом слое 
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Рис. 4. Зависимость среднего значения ошибочных классификаций 
от числа отказов в скрытом слое 
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Из полученных зависимостей видно, что влияние возникающих в сети дефектов нейронов 
скрытого слоя на ее выходные значения сети начинает проявляться в среднем при четырех од- 
новременно отказавших нейронов (20-25% отказов элементов сети). 

Предложенные показатели (1), (2) достаточно полно отражают динамику работы ИНС при 

возникновении в ней дефектов, не создают противоречивых суждений при оценке влияния де- 
фектов нейронов, в связи с чем являются адекватными. 
Заключение. Считается, что ИНС нечувствительна к отказам, возникающим в отдельных её эле- 
ментах [1,2,7] из-за структурной избыточности сети. Проведенное же исследование показывает, 
что избыточность элементов в распределенном представлении знаний нейронными сетями прямо- 
го распространения, не является эффективной мерой существенного повышения надежности 
функционирования сети. Показатели надежности в данном случае практически соизмеримы с ре- 
зультатами применения различных методов резервирования элементов для классических 
дискретных систем [8]. Можно предположить, что избыточность элементов в ИНС дает положи- 
тельный эффект, как правило, только в структурах, обладающих способностью к самоорганиза- 
ции. Направлениями дальнейших исследований могут быть: реализация структур, перераспреде- 
ляющих вычислительные ресурсы за счет гибкости применяемых алгоритмов обучения; создание 
избыточной памяти возможных состояний сети при выполнении задач различным числом элемен- 
тов и т.д. 
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